Triệu Khuông Dẫn xuất thân từ một gia đình dòng dõi quan lại. Ông tổ Triệu Thiệu làm Huyện lệnh đời Đường; ông cố Triệu Đình Lịch làm quan phiên trấn, thăng dần đến Ngự sử Trung thừa: ông nội Triệu Kính lần lượt làm Thứ sử Doanh Châu, Tô Châu và Trác Châu. Cha Triệu Khuông Dận là Triệu Hoằng Ân, một quan võ có tài cưỡi ngựa bắn cung, làm Chỉ huy sứ Đệ nhất quân thiết kỵ của nhà Hậu Chu, sau làm Hữu Sương Đô Chỉ huy sứ, lĩnh chức Phòng ngự sứ Nhạc Châu, theo Chu Thế Tông đánh Hoài, có công lần lượt lại được phong Kiểm hiệu Tư đồ, tước Thiên Thủy Huyện Nam. Năm 927, Triệu Khuông Dẫn được sinh ra ở Lạc Dương.

Cha con Triệu Khuông Dẫn đều là quan Cấm binh đời Hậu Chu, vinh quang một thời. Triệu Khuông Dận không những có tài võ nghệ siêu quần mà còn rất hiếu học, hiểu được đường lối trị quốc bình thiên hạ. Bất kể trên lưng ngựa hay ở nhà, lúc nào trên tay ông cũng có một quyển sách, không bao giờ ngưng học tập. Từ trong sách vở ông đã tăng thêm nhiều kiến thức, lĩnh hội được vô số tinh hoa, thu lượm được nhiều điều bổ ích.

Triệu Khuông Dẫn là người dũng cảm. Có lần ông bị thách thuần phục một con ngựa hoang mà không dùng yên cương. Ông nhảy lên ngựa, chẳng ngờ tính nó dữ quá, hất ông ra. Đầu ông đập ngay vào cửa thành. Ông bật dậy được ngay, túm lấy bờm nó mà ghì xuống, qua hồi lâu cuối cùng con ngựa cũng chịu phục. Bản thân ông thì không bị thương.

Sau nhiều năm phiêu bạt, vào năm 949, Triệu Khuông Dẫn tòng quân cho nhà Hậu Hán vào dưới trướng của đại tướng Hậu Hán lúc đó là Quách Uy.